Dinkum: Uma Ferramenta de Comunicação de Áudio Espacial para Conversas Remotas

Imersão em Ambientes de Áudio Personalizáveis para Conversas com Alta Fluência

O Dinkum é uma ferramenta de comunicação de áudio espacial que permite aos usuários se imergirem em ambientes de áudio personalizáveis. Os usuários podem selecionar entre três tamanhos de sala (íntima, casual, aventureira) e diferentes sons de fundo ambisônicos (formato de som surround de esfera completa) que combinam com o tipo de conversa e pessoas com quem estão falando. As pessoas podem alterar a distância em relação aos outros participantes durante a conversa, o que adiciona uma camada extra de interação às conversas remotas. O Dinkum pode aumentar a sensação de presença e intimidade dos participantes na conversa e aumentar a fluência da conversa.

O projeto foi desenvolvido por meio de prototipagem iterativa, testes intensivos com usuários e uma forte colaboração entre academia e indústria. Foram utilizados diferentes plugins para a espacialização de arquivos de áudio mono em uma DAW (Estação de Trabalho de Áudio Digital) e foram testadas experiências com diferentes pessoas. Além disso, foi construído um microfone binaural para testes mais aprofundados com múltiplas pessoas. Foi estabelecido um caminho de processamento de sinal que me permitiu testar com vários usuários estando remoto.

O Dinkum foi desenvolvido utilizando a ferramenta de espacialização binaural em tempo real 3D Tune-In Toolkit. Isso foi utilizado como um plugin VST dentro do Ableton Live. O 3D Tune-In Toolkit simula a reverberação de diferentes tamanhos de sala, a distância em relação ao ouvinte e a direção da fonte sonora. Para testes com usuários, desenvolvi um caminho de processamento de sinal que me permite enviar uma gravação de áudio de um microfone binaural por meio do Zoom.

Para iniciar uma conversa, selecione os participantes com quem deseja falar, escolha o tamanho da sala que corresponda às suas conversas e participantes (íntima, casual, aventureira), selecione os sons de fundo ambisônicos e, em seguida, inicie a chamada. Os usuários podem sair da sala e criar uma nova sala durante as conversas com participantes individuais. Para conversas recorrentes, os usuários podem salvar grupos e configurações. Caso uma conversa mude drasticamente de assunto, também é possível criar uma nova sala.

O projeto teve início em janeiro de 2021 e foi desenvolvido por mim para o meu mestrado em Design de Inovação e Engenharia até junho de 2021. O projeto será exibido na mostra de formatura anual do Royal College of Art e do Imperial College London em junho de 2021.

O projeto começou com uma revisão acadêmica da literatura e entrevistas sobre tecnologias de espacialização em tempo real. Após uma intensa fase de ideação em diferentes aplicações, passei para experimentação e prototipagem para ter uma melhor compreensão da tecnologia e seu valor. Utilizei uma abordagem iterativa e centrada no ser humano, focando na experiência. Os experimentos foram analisados com questionários utilizando uma escala Likert, focando na presença e intimidade.

O desafio foi criar um ambiente que me permitisse testar com a fidelidade necessária e alterar o áudio em tempo real. Um desafio adicional foi a representação visual de um espaço 3D com personagens em uma pequena tela de smartphone, que fosse fácil de entender, interagir e visualmente agradável e única. Superei isso prototipando as interações no telefone, afetando o áudio e a interface visual em tempo real por meio do protocolo OSC e feedback dos usuários.

O Dinkum é uma ferramenta de comunicação de áudio espacial que permite aos usuários se imergirem em ambientes de áudio personalizáveis que facilitam conversas remotas com alta fluência e uma sensação de presença em relação às outras pessoas na conversa. Os usuários podem selecionar entre três tamanhos de sala (íntima, casual, aventureira) e diferentes sons de fundo ambisônicos que combinam com o tipo de conversa e pessoas com quem estão falando. Os usuários podem alterar a distância em relação aos outros participantes para aprimorar a conversa e torná-la mais natural.

O Dinkum foi premiado com o Iron A' Design Award na categoria de Design de Tecnologias Móveis, Aplicações e Software em 2022. O Iron A' Design Award é concedido a criações bem projetadas, práticas e inovadoras que atendem aos requisitos profissionais e industriais. Respeitado por integrar as melhores práticas da indústria e características técnicas competentes, eles proporcionam satisfação e sentimentos positivos, contribuindo para um mundo melhor.